eval_batch_size:13107200, generate_setting:original, learning_rate:0.001, model:Observation, setting:source_passing, train_batch_size:4096
Valid result:
recall@5 : 0.0604    recall@10 : 0.0894    recall@20 : 0.1272    recall@50 : 0.193    mrr@5 : (0.0355+0j)    mrr@10 : (0.0394+0j)    mrr@20 : (0.0422+0j)    mrr@50 : (0.0443+0j)    ndcg@5 : (0.041+0j)    ndcg@10 : (0.0503+0j)    ndcg@20 : (0.06+0j)    ndcg@50 : (0.0732+0j)    hit@5 : 0.0632    hit@10 : 0.0933    hit@20 : 0.1332    hit@50 : 0.2025    precision@5 : 0.0127    precision@10 : 0.0095    precision@20 : 0.0068    precision@50 : 0.0042
Test result:
recall@5 : 0.063    recall@10 : 0.0925    recall@20 : 0.1298    recall@50 : 0.1943    mrr@5 : (0.0377+0j)    mrr@10 : (0.0419+0j)    mrr@20 : (0.0446+0j)    mrr@50 : (0.0467+0j)    ndcg@5 : (0.0431+0j)    ndcg@10 : (0.0527+0j)    ndcg@20 : (0.0623+0j)    ndcg@50 : (0.0754+0j)    hit@5 : 0.0667    hit@10 : 0.0981    hit@20 : 0.1371    hit@50 : 0.2049    precision@5 : 0.0134    precision@10 : 0.0099    precision@20 : 0.007    precision@50 : 0.0042

eval_batch_size:13107200, generate_setting:original, learning_rate:0.0005, model:Observation, setting:source_passing, train_batch_size:4096
Valid result:
recall@5 : 0.0558    recall@10 : 0.0836    recall@20 : 0.1221    recall@50 : 0.1903    mrr@5 : (0.0326+0j)    mrr@10 : (0.0364+0j)    mrr@20 : (0.0391+0j)    mrr@50 : (0.0414+0j)    ndcg@5 : (0.0378+0j)    ndcg@10 : (0.0468+0j)    ndcg@20 : (0.0566+0j)    ndcg@50 : (0.0703+0j)    hit@5 : 0.0582    hit@10 : 0.0871    hit@20 : 0.1276    hit@50 : 0.1996    precision@5 : 0.0117    precision@10 : 0.0088    precision@20 : 0.0064    precision@50 : 0.0041
Test result:
recall@5 : 0.0599    recall@10 : 0.0896    recall@20 : 0.1258    recall@50 : 0.1873    mrr@5 : (0.036+0j)    mrr@10 : (0.0401+0j)    mrr@20 : (0.0427+0j)    mrr@50 : (0.0448+0j)    ndcg@5 : (0.0412+0j)    ndcg@10 : (0.0509+0j)    ndcg@20 : (0.0601+0j)    ndcg@50 : (0.0725+0j)    hit@5 : 0.0626    hit@10 : 0.094    hit@20 : 0.1325    hit@50 : 0.1971    precision@5 : 0.0126    precision@10 : 0.0095    precision@20 : 0.0067    precision@50 : 0.0041

eval_batch_size:13107200, generate_setting:original, learning_rate:0.001, model:Observation, setting:merge, train_batch_size:4096
Valid result:
recall@5 : 0.0611    recall@10 : 0.0896    recall@20 : 0.1274    recall@50 : 0.1919    mrr@5 : (0.0356+0j)    mrr@10 : (0.0395+0j)    mrr@20 : (0.0422+0j)    mrr@50 : (0.0444+0j)    ndcg@5 : (0.0412+0j)    ndcg@10 : (0.0504+0j)    ndcg@20 : (0.0601+0j)    ndcg@50 : (0.0731+0j)    hit@5 : 0.0639    hit@10 : 0.0936    hit@20 : 0.1334    hit@50 : 0.2009    precision@5 : 0.0129    precision@10 : 0.0095    precision@20 : 0.0068    precision@50 : 0.0041
Test result:
recall@5 : 0.0624    recall@10 : 0.0939    recall@20 : 0.1308    recall@50 : 0.1936    mrr@5 : (0.0371+0j)    mrr@10 : (0.0414+0j)    mrr@20 : (0.0441+0j)    mrr@50 : (0.0462+0j)    ndcg@5 : (0.0425+0j)    ndcg@10 : (0.0527+0j)    ndcg@20 : (0.0622+0j)    ndcg@50 : (0.0749+0j)    hit@5 : 0.0663    hit@10 : 0.0991    hit@20 : 0.1383    hit@50 : 0.2045    precision@5 : 0.0133    precision@10 : 0.01    precision@20 : 0.0071    precision@50 : 0.0042

eval_batch_size:13107200, generate_setting:original, learning_rate:0.0005, model:Observation, setting:merge, train_batch_size:4096
Valid result:
recall@5 : 0.056    recall@10 : 0.0837    recall@20 : 0.1207    recall@50 : 0.1897    mrr@5 : (0.0324+0j)    mrr@10 : (0.0361+0j)    mrr@20 : (0.0388+0j)    mrr@50 : (0.0412+0j)    ndcg@5 : (0.0377+0j)    ndcg@10 : (0.0466+0j)    ndcg@20 : (0.0561+0j)    ndcg@50 : (0.07+0j)    hit@5 : 0.0584    hit@10 : 0.0873    hit@20 : 0.1264    hit@50 : 0.1989    precision@5 : 0.0117    precision@10 : 0.0088    precision@20 : 0.0064    precision@50 : 0.0041
Test result:
recall@5 : 0.059    recall@10 : 0.0905    recall@20 : 0.1263    recall@50 : 0.1882    mrr@5 : (0.0358+0j)    mrr@10 : (0.0402+0j)    mrr@20 : (0.0428+0j)    mrr@50 : (0.0448+0j)    ndcg@5 : (0.0409+0j)    ndcg@10 : (0.0511+0j)    ndcg@20 : (0.0603+0j)    ndcg@50 : (0.0727+0j)    hit@5 : 0.0618    hit@10 : 0.095    hit@20 : 0.133    hit@50 : 0.198    precision@5 : 0.0124    precision@10 : 0.0096    precision@20 : 0.0068    precision@50 : 0.0041

